大数据
Major Compaction 标签描述

作者:vivo互联网存储技术团队HangZhengbo 本文对HBaseCompaction的原理、流程以及限流的策略进行了详细的介绍,列举了几个线上进行调优的案例,最后对Compaction的相关参数进行了总结。 一、Compaction介绍 HBase是基于一种LSM-Tree(Log-StructuredMergeTree)体系架构的存储模型设计的,写入时先写入WAL(Write-Ahead-Log)日志,再写入Memstore缓存,满足一定条件后,会执行Flush操作将缓存数据刷写到磁盘,生成一个HFile数据文件。随着数据不断写入,HFile文件会越来越多,文件太多导致查询数据时...